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(54) Verfahren zur Darstellung des Kiefers 

(57) Die Erfindung betrifft ein Verfahren zur Darstel- 
lung des Kiefers (1 . 2) einer Person und eines Mod el Is 
davon. Das Verfahren besteht aus folgenden vorberei- 
tenden Schritten: 

Einfuhren einer Vorrichtung (3) zur Lagebestim- 
mung, die Markierungspunkte (4) aufweist, in die 
MundhShle der Person; 

Erstellen mindestens einer Aufnahme des Kiefers 
(1, 2) der Person mit einem bildgebenden Verfah- 
ren, wie etwa R6ntgen, Tomographie, NMR oder 
dgl., wobei die Markierungen mit aufgenommen 
werden, und Speicherung der Aufnahme als Daten- 
satz; 

Identifikation der Markierungspunkte (4); 

Herstellen eines Abdruckes des Kiefers (1, 
2) und Erzeugen eines Modells des Kiefers (1, 2). 

Zur Darstellung werden folgende Schritte durchgefuhrt: 

Anbringen eines weiteren 3D-Sensors auf der 
AuBenseite des betreffenden Kiefers (1 , 2); 
Neuerliches EinfQhren der Vorrichtung (3) zur 
Lagebestimmung, falls diese inzwischen entnom- 
men worden ist, in die Mundhflhle in gleicher Lage 
wie bei der Erstellung der Aufnahme, wobei die Vor- 
richtung (3) mit einem 3D-Sensor ausgestattet ist; 
Bestimmen der lagemSBigen Beziehung zwischen 
dem 3D-Sensor der Vorrichtung (3) und dem 3D- 
Sensor auf der AuBenseite des Kiefers (1 , 2); 
Entfernen der Vorrichtung (3) zur Lagebestimmung; 
Anbringen eines . weiteren 3D-Sensors auf der 
AuBenseite des Modells des Kiefers (1,2); 
Einf Qhreh der Vorrichtung (3) zur Lagebestimmung 
in das Modell des Kiefers (1 , 2) in gleicher Lage wie 
bei der Erstellung der Aufnahme. wobei die Vorrich- 
tung (3) mit einem 3D-Sensor ausgestattet ist; 


Bestimmen der lagem&Bigen Beziehung zwischen 
dem 3D-Sensor der Vorrichtung (3) und dem 3D- 
Sensor auf der AuBenseite des Modells des Kiefers 
(1.2); 

Entfernen der Vorrichtung (3) zur Lagebestimmung; 
Erzeugen einer Qberlagerung eines optischen Bil- 
des des Kiefers (1, 2) mit dem Datensatz in lage- 
richtiger Zuordnung oder alter nativ dazu Erzeugen 
einer Qberlagerung eines optischen Bildes des 
Modells des Kiefers (1, 2) mit dem Datensatz in 
lagerichtiger Zuordnung. Weiters betrifft die Erfin- 
dung eine Vorrichtung (3) zur Lagebestimmung. 
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Beschreibung 

Die Erfindung betrifft ein Verfahren zur Darsteliung 
des Kiefers einer Person und/oder eines Modells davon. 

Bei der Herstellung von zahnarztlichen Implantaten s 
ist eine genaue Planung des operativen Eingriffes erfor- 
derlich. Dazu steh en verschiedene MaBnahmen zur 
Verfugung. In der Regel wird ein Abdruck des betreffen- 
den Kiefers des Patienten hergestellt, woraus wiederum 
ein Modell des Kiefers gewonnen werden kann. Ande- 10 
rerseits sind verschiedene bildgebende Verfahren dazu 
geeignet, dem behandelnden Arzt AufschluB uber die 
jeweilige Situation zu verschaffen. Es kann sich dabei 
um gew6hnliche RSntgenbilder handeln, urn Tomogra- 
phien oder um NMR's (Kernspintomographie). Unbe- is 
friedigend dabei bleibt jedoch, daB das Modell 
einerseits und die Darsteliung aus dem bildgebenden 
Verfahren andererseits erst durch den Betrachter in 
Ubereinstimmung gebracht werden mussen. Noch 
schwieriger ist die Aufgabe, die reale Situation bei der so 
Operation selbst mit dem Modell bzw. mit der zuvor 
erstellten Darsteliung in Ubereinstimmung bringen zu 
mussen. 

Aus der EPA 488 987 des Anmelders ist ein Verfah- 
ren zur Darsteliung beweglicher Kdrper bekannt, bei zs 
dem eine optische Darsteliung des KOrpers und ein 
dem Kdrper zugeordnetes Datenfeld gleichzeitig oder 
alternativ aus derselben Perspeklive und im selben 
MaBstab in Echtzeit dargestellt werden. Ein solches 
Verfahren ist grunds&tzlich dazu geeignet, die oben 30 
beschri ©bene * Problematik*zu- losen. Es *wird> etwa aut 
einem Monitor ein optisches Bild des betreffenden Kie- 
fers angezeigt und gleichzeitig wird der zugehdrige 
Datensatz, das ist das Ergebnis des bildgebenden Ver- 
fahrens, angezeigt. An den betreffenden KGrperteilen 35 
ist dabei ein Lagesensor anzubringen, der gewahrlei- 
stet, daB sich der Datensatz entsprechend einer allfSlli- 
gen Bewegung des Kdrperteils, z.B. des Unterkiefers im 
vorliegenden Fall, verschiebt. Voraussetzung fur dieses 
Verfahren ist jedoch eine anf&ngliche Einstellung des 40 
Systems, bei der charakteristische Punkte des Daten- 
satzes identif iziert werden und mit den entsprechenden 
charakteristischen Punkten in der optischen Darsteliung 
in Ubereinstimmung gebracht werden. Gerade bei der 
Anwendung eines solchen Verfahrens auf das mensch- 45 
liche Kiefer stellen sich hierbei jedoch groBe Probleme, 
da die erforderlichen charakteristischen Punkte nicht in 
ausreichender Zahl vorhanden sind. Dies trifft inbeson- 
ders dann zu, wenn es sich um einen zahnlosen Kiefer 
handelt. AuBerclem macht die benStigte Genauigkeit im so 
Bereich des Kiefers eine solche Einstellung auch bei 
Vorliegen von Zahnen problematisch. 

Es sind weiters sogenannte Artikulatoren zur 
Bestimmung der Lage des Unterkiefers bekannt. Damit 
kann beispielsweise die Lage der virtuellen LSngsachse ss 
des Unterkiefers bestimmt werden. Solche Artikulato- 
ren sind jedoch nicht dazu geeignet, das oben beschrie- 
bene Problem zu IQsen, da die MundhOhle beim Eingriff 
selbst frei zuganglich sein muB. 


Eine weiterhin mOgliche Anbringung von Markie- 
rungspunkten auf der Haut an der AuBenseite des Kie- 
fers ist nicht durchfuhitoar, da die Patienten wahrend 
des Eingriffs normalerweise narkotisiert werden. Dazu 
werden sie durch die Nase intubiert, wodurch sich eine 
vOllige Verspannung der Gesichtsmuskulatur ergibt, 
was zu einer Verschiebung der Markierungspunkte 
fuhrt. Dies macht ein Heranziehen dieser Punkte zur 
Lagebestimmung unmOglich. Ein Befestigung eines 
MarkierungskOrpers durch die Haut hindurch bereits bei 
der Aufnahme vorzunehmen, ist wegen der damit ver- 
bundenen Belastung fur den Patienten im allgemeinen 
nicht mOglich. 

Eine Aufgabe der Erfindung ist es, diese Nachteile 
zu vermeiden und ein Verfahren zu schaffen, das eine 
sorgfaitige Planung eines operativen Eingriffes im 
Bereich der Kiefer anhand eines Modells ermOglicht, 
wobei die Darstellungen aus bildgebenden Verfahren in 
anschaulicher Weise einbezogen werden kOnnen Ein 
weitere Aufgabe der Erfindung ist es, wahrend eines 
operativen Eingriffes selbst eine Kbntrolle des jeweils 
erreichten Zustandes zu ermOglichen, indem eine opti- 
sche Darsteliung des Operationsbereiches zur Verfu- 
gung gestellt wird, die lagerichtig mit dem Ergebnis des 
bildgebenden Verfahrens uberlagert ist. 

Erfindungsgem&B wird cfies in einem ersten Aspekt 
der Erfindung durch die Ausfuhrung folgender Schritte 
erreicht: 

1. vorbereitende Schritte: diese l^nnen zu einem 
beliebigen .Z^itpurnkt MX^ .eigei^ichen J?arstel- 
lung durchgefQhrt werden, wobei lediglich gefordert 
werden muB, daB sich der Kiefer zwischen der 
Durchfuhrung dieser Schritte und der Darsteliung 
nicht verSndert, etwa durch einen zahnSrztiichen 
Eingriff. 

EinfQhren einer Vorrichtung zur Lagebestim- 
mung, die Markierungspunkte aufweist, in die 
MundhOhle der Person; wesentlich an der Vor- 
richtung ist, daB sie eine eindeutig und genau 
reproduzierbare Stellung in der Mundhehle ein- 
nimmt. Die Markierungspunkte sollen in dem 
jeweils verwendeten bildgebenden Verfahren 
einen guten Kontrast ergeben und somit leicht 
identifiziefbar sein. Es kann sich im Fall von 
Rdntgenaufnahmen etwa um Bleikugelchen 
handeln, die fest in Kunststoffmaterial einge- 
gossen sind. Als Markierungspunkte kGnnen 
auch die Ecken einer in der Vorrichtung einge- 
bauten Drahtstruktur o. dgl. dienen. Der in der 
Folge beschriebene Lagesensor selbst ist zu 
diesem Zeitpunkt nicht notwendigerweise in 
der Vorrichtung enthalten oder an ihr ange- 
bracht. Wesentlich ist jedoch, daB dieser Lage- 
sensor in der Folge lagemaBig eindeutig mit 
der Vorrichtung verbindbar ist. 
Erstellen mindestens einer Aufnahme des Kie- 
fers der Person mit einem bildgebenden Ver- 
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fahreh, wie etwa Rdntgen, Tomographie, NMR 
oder dgl., wobei die Markierungen mit aufge- 
nommen werden, und Speicherung der Auf- 
nahme als Datensatz; diese sogenannte 
Digitalisierung ist eine Voraussetzung fur die 
spdtere Bearbeitung der Aufnahme. 
Identifikation der Markierungspunkte; diese 
kann von Hand durchgefuhrt werden, etwa 
indem ein Markierungspunkt nach dem ande- 
ren auf einem Bildschirm mit dem Cursor auf- 
gesucht wird und dadurch identifiziert wind. 
Dies bedeutet. daB die Koordinaten der Mar- 
kierungspunkte im Koordinatensystem der Auf- 
nahme festgestellt werden. Es ist jedoch auch 
durchaus mdglich, ein Mustererkennungsver- 
fahren zur Identifikation zu verwenden. 

2. Schritte zur Durchfuhrung der eigentlichen Dar- 
stellung: diese Schritte werden aniaBlich einer 
Untersuchung der Person oder wahrend eines Ein- 
grrffs durchgefuhrt. 

Anbringen eines 3D-Sensors auf der AuBen- 
seite des betreffenden Kiefers; dies erfolgt bei- 
spielsweise dadurch, daB die Halterung fur den 
3D-Sensor durch die Haut im Bereich des 
Kinns der Person eingeschraubt wird, wenn die 
Darstellung des Urrterkiefers erfolgen soli. Es 
ist selbstverstandlich auch mdglich, sowohl 
Unterkiefer als auch Oberkiefer fur die Darstel- 
lung vorzubereiten, indem zwei Sensoren ver- 
wendet werden. 

Neuerliches Einfuhren der Vorrichtung zur 
Lagebestimmung, falls diese inzwischen ent- 
nommen worden ist in die Mundhdhle in glei- 
cher Lage wie bei der Erstellung der 
Aufnahme, wobei die Vorrichtung mit einem 
3D-Sensor ausgestattet ist; Es ist im Prinzip 
mdglich, daB die Aufnahme unmittelbar vor der 
Darstellung hergestellt wird. In diesem Fall 
kann sich die Vorrichtung zur Lagebestimmung 
noch in der Mundh6hle befinden. Im allgemei- 
nen wird jedoch in diesem Schritt die Vorrich- 
tung neu eingesetzt, wobei darauf zu achten 
ist, daB exakt die gleiche Lage in Bezug auf 
das Kiefer wie bei der Aufnahme erreicht wird. 
Nunmehr muB der 3D-Sensor an der Vorrich- 
tung angebracht sein oder in ihr eingebaut 
sein. Wesentlich ist daB die Lage dieses Sen- 
sors in Bezug auf die Markierungen eindeutig 
ist und genau bekannt ist. 
Bestimmen der lagemaBigen Beziehung zwi- 
schen dem 3D-Sensor der Vorrichtung und 
dem 3D-Sensor auf der AuBenseite des Kie- 
fers; dies erfolgt dadurch, daB die raumliche 
Lage der beiden Sensoren gleichzertig oder 
nahezu gleichzeitig bestimmt wird. 


Entfernen der Vorrichtung zur Lagebestim- 
mung; dadurch wird der freie Zugang zur 
Mundhdhle hergestellt 

Erzeugen einer Oberlagerung eines optischen 

5 Bildes des Kiefers mit dem Datensatz in lage- 

richtiger Zuordnung. Durch den Sensor auf der 
AuBenseite des Kiefers ist die aktuelle Lage 
des Kiefers stets bekannt. Durch die Durchfuh- 
rung einer Reihe von Koordinatentransfbrma- 

io tionen gelingt es, den Datensatz so zu 

pos'rtionieren, daB die Strukturen des Daten- 
satz es mit den entsprechenden Strukturen des 
optischen Bildes auch bei einer raumlichen 
Bewegung des Kiefers stets in Obereinstim- 

15 mung bleiben. Wenn beide Kiefer mir Sensoren 

versehen sind, kann zwischen der lagerichti- 
gen Darstellung des Unterkiefers und des 
Oberkiefers umgeschaltet werden. Es ist 
jedoch auch mdglich, den Datensatz in einen 

20 das Unterkiefer betreffenden Teil und einen das 

Oberkiefer betreffenden Teil zu unterteilen, 
wobei es dann mdglich ist sowohl Unterkiefer 
als auch Oberkiefer lagerichtig mit dem ent- 
sprechenden Datensatz uberlagert darzustel- 

25 len. 

Wesentlich an der vorliegenden Erfindung ist, daB 
der Schritt der anfanglichen Einstellung der Zuordnung 
zwischen dem Datensatz und der optischen Darstellung 

30 wesentlich vereinfacht wird. Wenn diese Zuordnung ein- 
mal hergestellt ist, kann das Verfahren so ablaufen, wie 
dies in der EPA 488 987 beschrieben ist. Da die Lage 
der Markierungspunkte in der Vorrichtung zur Lagebe- 
stimmung bekannt ist ist es nicht notwendig, diese 

35 Punkte mit einem 3D-Stylus abzutasten, oder sonstige 
MaBnahmen zu treffen, um das System einzustellen. 

In einem zweiten Aspekt der vorliegenden Erfin- 
dung wird die Darstellung nicht mit dem betreffenden 
Kiefer seibst durchgefOhrt, sondern es wird ein Modell 
der Kiefer in einer bekannten Art hergestellt. Die Vor- 

f a richtung zur Lagebestimmung paBt dann auch in dieses 

I Af/Modell in einer eindeutig bestimmten Lage. Auf diese 
Weise kann das Modell mit lagerichtig Qberiagertem 
Datensatz dargestellt werden. Damit ist es in einer sehr 

45 komfortablen Art mdglich, eine Operationsplanung 
durchzufQhren, oder verschiedene Varianten eines Ein- 
griffs zu simulieren. 

Diese beiden ersten Aspekte kdnnen miteinander 
kombiniert werdea wodurch der Bezug des realen Kie- 

50 fers zu dem Modell in einer sehr anschautichen Art dar- 
gestellt werden kann. Welters kann die optische 
Darstellung auch festgehalten werden, indem Photogra- 
ph! en oder Videoaufnahmen angefertigt werden. 

Die Darstellung seibst kann in der Weise erfolgen, 

55 die in der EP-A 488 987 beschrieben ist. Dabei wird 
eine Videokamera, die mit einem Lagesensor versehen 
ist, dazu verwendet, eine optische Darstellung des 
Objektes, also des Kiefers oder des Modells zu erzeu- 
gen, die auf einem entsprechenden Monitor angezeigt 
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wird. Da sowohl die raumliche Lage der Kamera, als 
auch die raumliche Lage des Objektes bekannt ist, kann 
eine Darstellung des Datensatzes berechnet werden, 
die dem gleichen Blickwinkel und dem gleichen MaB- 
stab entspricht. Somit fallen die entsprechenden Struk- 
turen der optischen Darstellung und aus der Aufnahme 
des bildgebenden Verfahrens zusammen und kSnnen 
lagerichtig gleichzeitig Oder alternativ dargestellt wer- 
den. 

Es ist jedoch in einer vorteilhaflen Ausfuhrungsvari- 
ante der Erfindung mOgiich, daB das Erzeugen einer 
Uberlagerung des optischen Bildes mit dem Datensatz 
dadurch erfolgt, daB eine Anzeige des Datensatzes zwi- 
schen dem Auge des Betrachters und dem darzustel- 
lenden Kiefer bzw. dem Modell des Kiefers/ is 
zwischengeschaltet wird. Eine solche Anzeige kanrf (J 

etwa als transparentes LCD (Flussigkristall) DisplaJ^ ^ 

ausgebildet sein. Der Anwender beobachtet dabei die 
reale Situation durch das Display hindurqj^^^utJlfin^ 
^leiehzeitig-der^atensatz^argeste^ Au ge des ygo 

[ ^ Anw^nders kommt es dadurch zu r Ub erlagerun grimaiT 
V^x gemeinen Fall ist sowohl der Anwender als auch das 
Display frei beweglich, wobei jedoch die Randbedin- 
gung erfullt sein muB, daB der Anwender das Objekt 
durch das Display hindurch beobachten kann. In die- 
sem Fall tragt sowohl der Anwender als auch das Dis- 
play einen 3D-Sensor, damit wiederum die jeweilige 
Perspeklive berechnet werden kann. Ein solches Ver- 
fahren ist fur allgemeine Objekte im AT - Patent 398 163 
des Anmelders dargestellt. Diese Variante besitzt den 
V6rt£il^^ 
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fund (j^htehSens^r - keinerlei Vorrichtung auf 
)pf tragerTmuBTWerters ist es auf einfache Weise 
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dem Kopf trageni 
mdglich. auch weiteren Personen den Zugang zu der 
Darstellung zu verschaffen. 

Ferner ist es jedoch im Rahmen der Erfindung in 
gleicher Weise mdglich, das Display als Brille auszubil- 
den oder sonst fest mit dem Kopf des Anwenders zu 
verbinden. Auch die Verwendung halbdurchiassiger 
Spiegel oder sonstiger Verfahren zur Einspiegelung in 
das Auge des Betrachters sind grundsatzlich mdglich. 

In einer besonders bevorzugten Variante des erfin- 
dungsgemaBen Verfahrens ist vorgesehen, daB vom 
Anwender dreidimensionale Strukturen in den Daten- 
satz der Aufnahme eingefugt weBderrund daft diese in 
lagerichtiger Zuordnung zurn optischen Bild^Jargestellt 
werden. Auf diese Weise fet-^eaJ*Ghl^fiur mOglich, 
gewisse nur undeutliche Strukturen in der Aufnahme 
hervorzuheben, sondern es kann auch in sehr einfacher 
Weise eine Simulation durchgefflhrt werden. Dies ist 
etwa dann vorteilhaft, wenn im Rahmen eines kieferor- 
thopadischen Eingriffs eine Veranderung gezielt herbei- 
gefuhrt werden soil. Dabei kann der gewQnschte oder 
geplante Endzustand eingezeichnet werden. Es kflnnen 
auch Situationen dargestellt werden, die sich nach dem 
Entfernen oder HinzufQgen von Knochenkeilen erge- 
ben. Anhand der Darstellung am Modell kann so uber 
die DurchfQhrbarkeit und Problematik eines solchen 
Eingriffs sehr genau AufschluB gewonnen werden. 


Weiters kann die optische Darstellung nicht nur 
"live" erfolgen, sondern auch festgehalten werden, 
indem Photographien oder Videoaufnahmen angefertigt 
werden. Wenn dabei die Vorrichtung zur Lagebestim- 
mung auch optisch sichtbare Markierungspunkte auf- 
weist, so kann das erfindungsgemaBe Verfahren 
geringfugig modifiziert werden. Die vorbereitenden 
Schritte errtsprechen denen des oben beschriebenen 
Verfahrens. In der Folge wird der Einfachheit halber von 
der Aufnahme von Photos ausgegangen. Fur Videoauf- 
nahmen gilt das Gesagte sinngemaB. Je nachdem, ob 
die Photoaufnahmen vom Kiefer selbst oder von einem 
Modell angefertigt werden soli, wird ein solches Modell 
hergestellt oder nicht. Wesentlich ist, daB mindesten s 
^ipo^Airfn^h r"* . hpsspr jf^och zwei oder mehr Auf nah- 
mfen jeweils a us der gleichen Perspektive einmal mit 
.^eingesetzter Vorrichtung zurj^£ebesgr^ ein- 
maT^rijaOjese„heFgestellt werden. Da die Markie- 
rungspunkte der Vorrichtung auch auf den Photos 
sichtbar sind, k6nnen diese auf einem Monitor mit der 
Rdntgen- Aufnahme o. dgl. in Ubereinstimmung 
gebracht werden. Auf diese Weise ist es m6glich, die 
entsprechende Koordinatentransformation zu bestim- 
men. Da die Photos ohne di eNforrichtun q aus der g lei- 
chen Pers pektive hergesteii T~worden sind. ist es 
ilunmehr maglich, auch-in. diese~den-Datensatz-aus 
dem i "bildgebenden Verfahren lag^chtig^^zufc^nden. 
Dies ist wesentlich, da" eret~auf dieser Aufnahme die 
interessierenden Strukturen ohne Behinderung durch 
die Vorrichtung ersichtlich sind. Falls zwischen den Auf- 
, , n iMM^ 

fers stattgefunden hat, wie dies in manchen Fallen 
unvermeidlich ist, so wird das Verfahren dadurch nicht 
beeintrachtigt, da der auBen angebrachte Lagesensor 
35 diese Bewegung erfaBt und somit eine entsprechende 
Kbrrektur mGglich ist. Neben der Darstellung der Photos 
ist naturlich auch bei dieser Variante des Verfahrens die 
"live" Darstellung, wie sie oben beschrieben ist, zusatz- 
lich mSglich. Das Verfahren ist vereinfacht, da ein eige- 
40 ner 3D-Sensor der Vorrichtung zur Lagebestimmung 
erttbehrlich ist. 

Weiters betrifft die vorliegende Erfindung eine Vor- 
richtung zur Lagebestimmung, die fOr eines der obigen 
Verfahren verwendbar ist, wobei die Vorrichtung in die 
45 MundhOhle einer Person einfuhrbar ist und so ausgebil- 
det ist, daB sie durch Oberkiefer und Unterkiefer der 
Person in einer eindeutig reproduzierbaren Stellung 
gehalten werden kann. Diese Vorrichtung ist dadurch 
gekennzeichnet, daB sie Markierungspunkte aufweist, 
so die mit einem bildgebenden Verfahren identifizierbar 
sind und daB sie weiters einen Lagesensor aufweist, 
der eine genaue Bestimmung der raumlichen Lage der 
Vorrichtung ermdglicht. Wie dies oben bereits beschrie- 
ben worden ist, kann der Lagesensor entfernbar sein, 
55 solange gewahrleistet ist, daB bei eingebautem Sensor 
die raumliche Zuordnung zwischen Sensor und den 
Markierungspunkten eindeutig und reproduzierbar ist. 

Vorzugsweise ist vorgesehen, daB die Vorrichtung 
aus einem festen GrundkOrper besteht, der die Markie- 
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rungspunkte und den Lagesensor aufweist und daB an 
diesem Grundkdrper HaltekCrper aus einem flexiblen, 
erhartbaren Material gebildet sind, die sich der Form 
von Zahnen oder dem Kiefer anpassen. Die Vorrichtung 
wird dabei zunachst in der Art eines Abdruckes an das 
Kiefer angepaBt und kann nach dem Erharten reprodu- 
zierbar in der gleichen Lage eingesetzt werden. 

In einer Variante der Vorrichtung weist diese Mar- 
kierungspunkte auf, die sowohl mit einem bildgebenden 
Verfahren identifizierbar sind, als auch optisch sichtbar 
sind. 

In der Folge wird die Erfindung durch die in den 
Figuren dargestellten AusfOhrungsbeispiele naher 
eriautert. Die Figuren zeigen schematisch: 

Die Fig. 1 eine Person mit einer in die MundhOhle 
eingesetzten Vorrichtung zur Lagebestimmung; die Fig. 
2 ein erstes System, mit dem das erfindungsgemaBe 
Verfahren durchgefQhrt werden kann; die Fig. 3 ein 
zweites System, mit dem das erfindungsgemaBe Ver- 
fahren durchgefQhrt werden kann und die Fig. 4 eine 
Variante der Ausfuhrung von Markierungspunkten. 

In der Fig. 1 ist der Kbpf einer Person mit Unterkie- 
fer 1 und Oberkiefer 2 angedeutet Dazwischen bef indet 
sich eine Vorrichtung 3 zur Lagebestimmung, die als 
sogenannter Splint ausgebildet ist, der in einer eindeu- 
tig reproduzierbaren Stellung eingesetzt werden kann. 
In dieser Vorrichtung 3 ist eine Anzahl von Markierungs- 
punkten 4 vorgesehen, die z.B. auf einer Rdntgendar- 
stellung War ersichtlich sind. Ein 3D-Sensor 5 ist test mit 
der Vorrichtung 3 verbunden. An der AuBenseite des 
UnterWefers 1 ist ein weiterer 3DrSensor 6 ange- 
schraubt. 

Das System von Fig. 2 besteht aus einer Kamera 
10, an der ein 3D-Sensor 11 test angebracht ist. Die 
Kamera ist Qber einen Computer 12 mit einem Monitor 
13 verbunden, auf dem der Unterkiefer 1 dargestellt 
werden kann. In dem Computer 12 ist weiters eine Auf- 
nahme des bildgebenden Verfahrens gespeichert. Wei- 
ters ist der Computer mit einem Magnetfeldemitter 14 
verbunden, der raumfest angeordnet ist. Dadurch kann 
die jeweilige raumliche Lage einschlieBlich der Winkel- 
lage der Sensoren 6 und 1 1 erfaBt werden. Der Compu- 
ter berechnet in Echtzert eine Darstellung des 
Datensatzes aus dem bildgebenden Verfahren und 
zeigt diese auf dem Bildschirm an. 

Bei der AusfOhrungsvariante von Fig. 3 ist der Com- 
puter 12 mit einem durchtassigen LCD-Display 23 ver- 
bunden, das einen 3D-Sensor 22 tragt. der Betrachter 
20 tragt ebenfalls einen 3D-Sensor 21. Neben dem 
Sensor 6, der wie bei der vorigen AusfQhzungsvariartte 
mit dem Unterkiefer 1 verbunden ist, ist hier auch ein an 
der Stirn angebrachter Sensor 26 vorgesehen, der 
somit mit dem Oberkiefer 2 fest verbunden ist. Der 
Computer berechnet eine Darstellung des bildgeben- 
den Verfahrens, die der jeweiligen Stellung von Kiefer 1 , 
2, Display 23 und Betrachter 20 zueinander entspricht. 
In gleicher Weise kann ein Modell 30 des Kiefers 
betrachtet werden, das mit Sensoren 31, 32 bestQckt 
ist. 


Die Fig. 4 zeigt schematisch eine Alternative zur 
Ausfuhrung der Markierungspunkte, die in oder an der 
Vorrichtung zur Lagebestimmung angebracht sind. In 
drei zueinander rechtwinkeligen Ebenen 40, 41, 42 sind 
5 Strukturen angeordnet, die auf der ROntgenaufnahme 

0. dgl. einen Kontrast ergeben. Zwei dieser Ebenen 40, 
42 sind dann, wenn die Vorrichtung 3 in das Kiefer 1, 2 
eingesetzt ist, im wesentlichen parallel zur Symmetrie- 
ebene des Kopfes. Die Strukturen bestehen jeweils aus 

10 einem Rechteck mit einer Diagonale. Mit 50 ist eine 
gedachte Schichtebene einer CT-Aufnahme bezeich- 
net, die rechtwinkelig zu den Ebenen 40 und 42 ist. In 
der entsprechenden Darstellung dieser CT-Schicht 50 
erscheint die obere Seite 60 des Rechtecks als Punkt 

15 60a, die untere Seite 61 als Punkt 61a und die Diago- 
nale 62 als zwischen diesen Punkten 60a und 61a lie- 
genden Punkt 62a. Aus dem Verhaitnis der Abstande m 
und n des Punktes 62a zu den Punkten 60a und 61a 
kann man die genaue Lage der Schicht 50 bestimmen. 

20 Auf diese Weise ist es mGglich, die Information des CTs 
uber den Tischvorschub zu korrigieren, was etwa dann 
erforderlich ist, wenn sich der Patient wahrend des 
Scanvorganges bewegt hat. 

Die Ebenen 40, 41 , 42 mit den oben beschriebenen 

25 Strukturen k&nnen sowohl in der Vorrichtung zur Lage- 
bestimmung integriert sein, als auch durch eine starre 
Verbindung mir ihr so verbunden sein, daB sie auBer- 
haib der Kiefer 1 , 2 liegen. 

30 Patentanspruche 

1 . Verfahren zur Darstellung des Kiefers einer Person, 
bestehend aus folgenden vorbereitenden Schritten: 

35 - Einfuhren einer Vorrichtung (3) zur Lagebe- 
stimmung, die Markierungspunkte (4) aufweist, 
in die MundhShle der Person; 
Erstellen mindestens einer Aufnahme des Kie- 
fers (1, 2) der Person mit einem bildgebenden 

40 Verfahren, wie etwa ROntgen, Tomographie. 

NMR oder dgl, wobei die Markierungspunkte 
(4) mit aufgenommen werden, und Speiche- 
rung der Aufnahme als Datensatz; 
Identifikation der Markierungspunkte (4); 

45 

wobei zur Darstellung folgende Schritte durchge- 
fQhrt werden: 

Anbringen eines 3D-Sensors (6, 26) auf der 
so AuBenseite des betreffenden Kiefers (1,2); 

Neuerfiches Einfuhren der Vorrichtung (3) zur 
Lagebestimmung, falls diese inzwischen ent- 
nommen worden ist, in die Mundhdhle in glei- 
cher Lage wie bei der Erstellung der 
55 Aufnahme, wobei die Vorrichtung (3) mit einem 

3D-Sensor (5) ausgestattet ist; 
Bestimmen der lagemaBigen Beziehung zwi- 
schen dem 3D-Sensor (5) der Vorrichtung (3) 
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(4) mit aufgenommen werden, und Speiche- 
rung der Aufnahme ais Datensatz; 
Identifikation der Markierungspunkte (4); 
Herstellen eines Abdruckes des Kiefers (1 , 2) 
r und Erzeugen eines Mcxiells (30) des Kiefers 

0.2); 

wobei zur Darstellung folgende Schritte durchge- 
fuhrt werden: 

Anbringen eines weiteren 3D-Sensors (6, 26) 
auf der AuBenseite des betreffenden Kiefers 
(1.2); 

Neuerliches Einfuhren der Vorrichtung (3) zur 
is Lagebestimmung, falls diese inzwischen ent- 

nommen worden ist, in die MundhOhle in glei- 
cher Lage wie bei der Erstellung der 
Aufnahme, wobei die Vorrichtung (3) mit einem 
3D-Sensor (5) ausgestattet ist; 
20 - Bestimmen der lagerr&Bigen Beziehung zwi- 
schen dem 3D-Sensor (5) der Vorrichtung (3) 
und dem 3D-Sensor (6, 26) auf der AuBenseite 
des Kiefers (1,2); 

Entfernen der Vorrichtung (3) zur Lagebestim- 
25 mung; 

Anbringen eines weiteren 3D-Sensors auf der 
AuBenseite des Modells des Kiefers (1.2); 
Einfuhren der Vorrichtung (3) zur Lagebestim- 
mung in das Modell (30) des Kiefers (1, 2) in 
30 gleicher Lage wie bei der Erstellung der Auf- 

riahWef^wWeif^di e**Vonichtungs* (3)w mit^einern 
3D-Sensor (5) ausgestattet ist; 
Bestimmen der lagemSBigen Beziehung zwi- 
schen dem 3D-Sensor (5) der Vorrichtung (3) 
35 und dem 3D-Sensor (30/31) auf der AuBen- 

seite des Modells (30) des Kiefers (1,2); 
Entfernen der Vorrichtung (3) zur Lagebestim- 
mung; 

Erzeugen einer Oberlagerung eines optischen 
40 Bildes des Kiefers (1. 2) mit dem Datensatz in 

lagerichtiger Zuordnung oder alternativ dazu 
Erzeugen einer Oberlagerung eines optischen 
Bildes des Modells (30) des Kiefers (1 f 2) mit 
dem Datensatz in lagerichtiger Zuordnung. 
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und dem 3D-Sensor (6, 26) auf der AuBenseite 
des Kiefers (1,2); 

Entfernen der Vorrichtung (3) zur Lagebestim- 
mung; 

Erzeugen einer Oberlagerung eines optischen 
Bildes des Kiefers (1. 2) mit dem Datensatz in 
lagerichtiger' Zuordnung. 

2. . Verfahren zur Darstellung eines Modells des Kie- 
fers einer Person, bestehend aus folgenden vorbe- 
reitenden Schritten: 

Einfuhren einer Vorrichtung (3) zur Lagebe- 
stimmung, die Markierungspunkte (4) aufweist, 
in die MundhOhle der Person; 
Erstellen mindestens einer Aufnahme des Kie- 
fers (1 , 2) der Person mit einem bildgebenden 
Verfahren, wie etwa ROntgen, Tomographie, 
NMR oder dgl., wobei die Markierungspunkte 
(4) mit aufgenommen werden, und Speiche- 
rung der Aufnahme als Datensatz; 
Identifikation der Markierungspunkte (4) ; 
Herstellen eines Abdruckes des Kiefers (1, 2) 
und Erzeugen eines Modells (30) des Kiefers 
(1.2); 

wobei zur Darstellung folgende Schritte durchge- 
fGhrt werden: 

Anbringen eines weiteren 3D-Sensors (31 , 32) 
fers(1,2); 

EinfGhren der Vorrichtung (3) zur Lagebestim- 
mung in das Modell (30) in gleicher Lage wie 
bei der Erstellung der Aufnahme, wobei die 
Vorrichtung (3) mit einem 3D-Sensor (5) aus- 
gestattet ist; 

Bestimmen der lagemSBigen Beziehung zwi- 
schen dem 3D-Sensor (5) der Vorrichtung (3) 
und dem 3D-Sensor (30, 31) auf der AuBen- 
seite des Modells (30) des Kiefers (1, 2); 
Entfernen der Vorrichtung (3) zur Lagebestim- 
mung; 

Erzeugen einer Oberlagerung eines optischen 
Bildes des Modells (30) mit dem Datensatz in 
lagerichtiger Zuordnung. 

3. Verfahren zur Darstellung des Kiefers einer Person 
und eines Modells davon, bestehend aus folgenden 
vorbereitenden Schritten: 


4. Verfahren nach einem der Anspruche 1 bis 3, 
dadurch gekennzeichnet. daB das Erzeugen der 
Oberlagerung eines optischen Bildes mit dem 
Datensatz auf einen Monitor (13) erfolgt, wobei das 
optische Bild von einer Videokamera (10) aufge- 
nommen wind, die mit einem 3D-Sensor (11) zur 
Bestimmung der rSumlichen Lage fest verbunden 
ist. 

5, Verfahren nach einem der Anspruche 1 bis 3, 
dadurch gekennzeichnet, daB das Erzeugen einer 
Oberlagerung des optischen Bildes mit dem Daten- 
satz dadurch erfolgt, daB eine Anzeige des Daten- 
satzes zwischen dem Auge des Betrachters (20) 


EinfQhren einer Vorrichtung (3) zur Lagebe- 
stimmung, die Markierungspunkte (4) aufweist, 
in die MundhOhle der Person; 
Erstellen mindestens einer Aufnahme des Kie- ss 
fers (1 . 2) der Person mit einem bildgebenden 
Verfahren, wie etwa ROntgen, Tomographie, 
NMR oder dgl., wobei die Markierungspunkte 
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und dem darzustellenden Kiefer (1, 2) bzw. dem 
Modell (30) des Kiefers (1, 2) zwischengeschaltet 
wird. 

Verfahren nach Anspruch 5. dadurch gekennzeich- s 
net. daB die Anzeige ats transparentes LCD-Dis- 
play (23) ausgebildet ist. 

Verfahren nach Anspruch 5 oder 6 ( dadurch 
gekennzeichnet, daB die Anzeige als Brille, als ein w 
Schirm, der zwischen Beobachter und Kiefer (1, 2) 
bzw. Modell angeordnet ist und der vorzugsweise 
einen 3D-Sensor tragt, ausgebildet ist, Oder da!3 die 
Anzeige durch Einspiegetung des Datensatz in das 
Auge des Beobachters (20) durchgefuhrt wird. is 

Verfahren nach einem der Anspruche 1 bis 7, 
dadurch gekennzeichnet, daB vom Anwender drei- 
dimensionale Strukturen in den Datensatz der Auf- 
nahme eingefugt werden und daB diese in 20 
lagerichtiger Zuordnung zum optischen Bild darge- 
stellt werden. 

Verfahren zur Darstellung des Kiefers einer Person 
und/oder eines Modells davon, bestehend aus fbl- 25 
genden vorbereitenden Schritten: 

Einfuhren einer Vorrichtung (3) zur Lagebe- 
stimmung, die optisch sichtbare Markierungs- 
punkte (4) aufweist, in die MundhShle der 30 
Person; 

Erstellen mindestens einer Auf nahme des Kie- 
fers (1 , 2) der Person mit einem bildgebenden 
Verfahren, wie etwa Rdntgen, Tomographie, 
NMR oder dgl., wobei die Markierungspunkte 35 
(4) mit aufgenommen werden, und Speiche- 
rung der Auf nahme als Datensatz; 
gegebenenfalls Herstellen eines Abdruckes 
des Kiefers (1, 2) und Erzeugen eines Modells 
(30) des Kiefers (1,2); 40 

wobei zur Darstellung folgende Schritte durchge- 
fuhrt werden: 

- Anbringen eines weiter en 3D-Sensors (6, 26) 45 
auf der AuBenseite des betreffenden Kiefers 
(1, 2) bzw. des Modells (30) des Kiefers; 
Neuerliches Einfuhren der Vorrichtung (3) zur 
Lagebestimmung, falls diese inzwischen ent- 
nommen worden ist, in die MundhOhle bzw. in so 
das Modell (30) in gleicher Lage wie bei der 
Erstellung der Aufnahme des bildgebenden 
Verfahrens; 

Herstellung mindestens einer photographi- 
schen oder Video-Aufnahme des Kiefers (1 , 2) ss 
bzw. des Modells (30); 

Errtfernen der Vorrichtung (3) zur Lagebestim- 
mung; 


Herstellung mindestens einer weiteren photo- 
graphischen oder Video-Aufnahme des Kiefers 
(1, 2) bzw. des Modells (30) aus der gleichen 
Position; 

Speicherung der photographischen oder 
Video- Auf nahmen als Datensatz; 
Herstellen der Qbereinstimmung der Markie- 
rungspunkte auf der Aufnahme des bildgeben- 
den Verfahrens und der optischen Darstellung; 
Erzeugen einer Uberlagerung eines optischen 
Bildes des Kiefers (1, 2) mit dem Datensatz in 
lagerichtiger Zuordnung oder alternativ dazu 
Erzeugen einer Oberlagerung eines optischen 
Bildes des Kiefers (1, 2) bzw. des Modells (30) 
mit dem Datensatz in lagerichtiger Zuordnung. 

10. Vorrichtung zur Lagebestimmung, die fur ein Ver- 
fahren nach einem der AnsprOche 1 bis 8 verwend- 
bar ist, wobei die Vorrichtung (3) in die MundhShle 
einer Person einftihrbar ist und so ausgebildet ist, 
daB sie durch Oberkiefer (2) und Unterkiefer (1) der 
Person in einer eindeutig reproduzierbaren Stellung 
gehatten werden kann, dadurch gekennzeichnet, 
da (3 die Vorrichtung (3) Markierungspunkte (4) auf- 
weist, die mit einem bildgebenden Verfahren identi- 
fizierbar sind und daft sie weiters einen Lagesensor 
(5) aufweist, der eine genaue Bestimmung der 
rSumlichen Lage der Vorrichtung (3) ermdglicht. 

11. Vorrichtung nach Anspruch 10, dadurch gekenn- 
zeichnet, daB sie aus einem festen Grundkarp r 
besteht, der die Markierungspunkte (4) und den 
Lagesensor aufweist und daB an diesem Grundkdr- 
per Haltekdrper aus einem flexiblen, erhdrtbaren 
Material gebildet sind, die sich der Form von Zah- 
nen oder dem Kiefer (1 , 2) anpassen. 

12. Vorrichtung zur Lagebestimmung, die fur ein Ver- 
fahren nach Anspruch 9 verwendbar ist, wobei die 
Vorrichtung (3) in die MundhGhle einer Person ein- 
fuhrbar ist und so ausgebildet ist, daB sie durch 
Oberkiefer (2) und Unterkiefer (1) der Person in 
einer eindeutig reproduzierbaren Stellung gehatten 
werden kann, dadurch gekennzeichnet, daB die 
Vorrichtung (3) Markierungspunkte (4) aufweist, die 
sowohl mit einem bildgebenden Verfahren identrfi- 
zierbar sind, als auch optisch sichtbar sind. 



8 


EP 0 741 994 A1 



J- - ■• . - ....... ... - ... - . , . . . . ....... . - - - * •■ , 


EP 0 741 994 A1 


Europaisches 
Patentamt 


EUROPAISCHER RECHERCHENBERICHT 


Nuniir if Aam«lAiug 

EP 95 89 0092 


EINSCHLAGIGE DOKUMENTE 


Katcgoric 


Keomcicfaiwiig des Dokuments nat Angabe, sowett erfordcriieh, 
do- ma6ccfafc*en Tctle 


Anspracfa 


KLASSIFIKATION DOL 
ANMELDUNC (Int-Clt) 


0,A 


EP-A-0 314 506 (THE GOVERNORS OF THE 
UNIVERSITY OF ALBERTA) 

* Zusammenfassung * 

* Spalte 4, Zeile 51 - Spalte 11, Zelle 
19; Tabellen 1-4 * 

WO-A-93 22893 (WAKE FOREST UNIVERSITY) 

* Seite 10, Zeile 3 - Seite 12, Zeile 9; 
Tabelle 1 * 

US-A-5 113 424 (G.C.BURDEA ET AL) 

* Spalte 9, Zeile 22 - Zeile 60; Tabelle 1 
* 

EP-A-0 488 987 (TRUPPE, MICHAEL, DR.) 

* Seite 4, Zeile 31 - Zeile 50; Tabelle 1 


1,10 
4.5 


I, 10 

II, 12 


1,10 
4.8,11, 

12 

1,4,5,8, 
10 


A61B5/06 
A61B6/14 


■ECHERCHIEBTE 
SACHGDUETE 0ULCU) 


A61B 


Dcr voiticficsde Rccfccrrtmbcrictit wurde RraOe 


BERLIN 


1. September 1995 


Weihs, J 


KATEGOKIE DER GEN ANN TEN DOKUMENTE 

X : wo bflsondcrcr Bedmtung illcbi bctnchM 

Y : vim basoniow Baiwtung In Verbindung raft einer 

andcrcn V«rtfftntlicfaung fenrfben Kmtegorie 
A : tacfaaologlscbcr HJnttrgrun* 

: olcfatschriftliche Offc&buimg 
P : Zwisc&«iUt«rttur 


T : 4m Erftoiuag zogrunic U«gA*e Th«ori€n o4m Gfaaisftu 
E : titans Patcottfokniiwat, ias Hioch «rxtu»crf«r 

aacfa 4tm AnmtlM stum wttffc&tUc&t worttn 1st 
D : Id 4m AnacMimg *ngtfUhrt«s Doknmwl 
L : us in*«m Grttaitn ingtfUhrtas Dokuaakt 


m : MltglM 64 
Dokumot 


4m gldcato PatcatfunUit, Ub«ftoitlTiTMna« 


10 


Line 40 : BNSDOC tag : No converter for FO FP Output Format PS CC EP KC PA 


Error converter: /work/bps/bin/err2ps 


» 

1 ' 



( 1 9) European Patent Office 

(11) EP0 741 994 Al 

(12) EUROPEAN PATENT APPLICATION 
(43) Publication date: 

13.1 1 .1996 Patent Office Journal (Patentblatt) 1996/46 

(21) Registration number: 95890092.0 

(22) Date of filing: 1 1.05.1995 
(51) Int. CL 5 A61B 5/06, A61B 6/14 
(84) Designated contractual states: 

AT BE CH DE DK ES FR GB GR IE IT LI LU MC NL PT SE 

(7 1 ) Applicant: TRUPPE, Michael, Dr. 1 1 1 0 Vienna (AT) 

(72) Inventor: TRUPPE, Michael, Dr. 1 1 10 Vienna (AT) 

(74) Representative: Babeluk, Michael, Dipl. Ing. Mag., Patent Attorneys Babeluk-Krause, 
Mariahilfer Guertel 39/1 7, 1 1 50 Vienna (AT) 


(54) Process for display of the jaw 

(57) The invention concerns a process for display of a person's jaw (1, 2) and a model thereof. 
The process involves the following preparatory steps: 

- Introducing into the person's oral cavity a position-determining device (3) with marking 
points (4); 

- Taking at least one image of the person's jaw (1, 2) by means of an imaging procedure, such 
as X-ray, tomography, NMR or similar, whereby the marks are also photographed, and storing 
the image as a data record; 

- Identifying the marking points (4); 

- Producing an impression of the jaw (1, 2) and generating a model of the jaw (1,2). 
The following stages are carried out in order to display the jaw: 

- Applying an additional 3D sensor on the outside of the jaw in question (1, 2); 

- Re-introducing the position-determining device (3), if meanwhile removed, into the oral 
cavity in the same position as when taking the image, the device (3) being fitted this time with 
a 3D sensor; ~" 


Quality Translations Job No. 32815 


1 



- Determining the positional relationship between the 3D sensor of the device (3) and the 3D 
sensor on the outside of the jaw (1 5 2); 

- Removing the position-determining device (3); 

- Placing an additional 3D sensor on the outside of the model of the jaw (1,2); 

- Introducing the position-determining device (3) into the model of the jaw (1, 2) in the same 
position as when taking the image, the device (3) being fitted with a 3D sensor; 

- Determining the positional relationship between the 3D sensor of the device (3) and the 3D 
sensor on the outside of the model of the jaw (1 , 2); 

- Removing the position-determining device (3); 

- Generating a superimposition of an optical image of the jaw (1,2) with the data record in a 
correct positional arrangement, or alternatively generating a superimposition of an optical 
image of the model of the jaw (1 5 2) with the data record in a correct positional arrangement. 
The invention further involves a position-determining device (3). 
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Description 


The invention involves a procedure for display of a person's jaw (1, 2) and/or a model thereof. 

When producing dental implants, it is vital to accurately plan the operative procedures. A 
number of measures are available for this purpose. Normally an impression of the patient's 
jaw is taken, from which a model of the jaw can be made. Alternatively, a number of imaging 
procedures are suitable for providing the attending physician/dentist with information on the 
specific situation. These may be regular-X-ray images, tomograms or NMRs (nuclear 
magnetic resonance images). However, all these cases share the unsatisfactory aspect that the 
observer must reconcile the model, on the one hand, with the display resulting from imaging 
methods, on the other. What is even more difficult is having to reconcile the real situation 
during the operation itself with the model or the previously generated display. 

From the applicant's EPA 488 987 a procedure is known for displaying movable bodies, in 
which a visual display of the body and a data field can be displayed simultaneously or 
alternately in real time, from the same perspective and to the same scale. Such a procedure is 
basically suitable for solving the problem described above. An optical image of the jaw in 
question is displayed on a monitor, while the associated data record, which is the result of the 
imaging procedure, is displayed at the same time. A position sensor must be attached to the 
relevant body parts, to guarantee that the data record is displaced in accordance with any 
movement of the body part, e.g. the lower jaw in the case in question. A prerequisite for this 
procedure is, however, an initial setting of the system in which the characteristic points of the 
data record are identified and coordinated with the corresponding characteristic points in the 
visual display. However, major problems occur when applying such a procedure to the human 
jaw, since the requisite characteristic points are not present in sufficient numbers. This is 
particularly true in the case of a toothless jaw. In addition, the required accuracy in the area of 
the jaw makes such a setting problematic even when teeth are present. 

Additionally, so-called articulators are known for determining the position of the lower jaw. 
These enable determination, for example, of the position of the virtual longitudinal axis of the 
lower jaw. However, such articulators do not help to solve the problem described above, since 
the oral cavity must be freely accessible during the actual intervention. 

Another possible way of applying marking points on the skin of the outside of the jaw cannot 
be implemented, since the patient is normally anesthetized during interventions. For this 
purpose, intubation is performed through the nose, resulting in complete relaxation of the 
facial muscles and leading to a displacement of the marking points. This makes it impossible 
to use these points to determine position. Fixing a marking body through the skin when 
producing the images is generally not possible because of the distress thus caused to the 
patient. 

One of the objectives to be achieved by the invention is to avoid these drawbacks and create a 
procedure which allows for careful planning of a surgical interventio n in the area of the jaw by 
means of a model, whereby displays trom imaging procedures may be used for graphic 
purposes. A further object of the invention is to enable the condition achieved at any particular 
moment to be controlled by making available a visual display of the operation area, which is 
superimposed in a correct positional arrangement with the result of the imaging procedure. 
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According to the invention, this is achieved in a first aspect of the invention by performing the 
following steps: 

1 . Preparatory steps: these can be carried out at any time prior to the actual display; in this 
regard, the only requirement is that the jaw does not change (e.g. as a result of a dental 
procedure) between performance of these steps and the display. 

- Introducing a position-determining device (3) with marking points into the person's oral 
cavity; it is important for the device to occupy a position in the oral cavity which is 
unambiguous and can be precisely reproduced. The marking points should provide good 
contrast in the specific imaging procedure used, and hence be readily identifiable. In the case 
of X-rays, these may be lead pellets immovably cast in the plastic material. Another type of 
marking point could be the corners of a wire structure or similar built into the device. At this 
point, the position sensor described below is not necessarily contained in the device or 
attached to it. However, the important thing is that it must subsequently be possible to connect 
this position sensor to the device in a positionally unambiguous fashion. 

- Taking(^T^st^neinmge^f the person's jaw with an imaging procedure, such as X-ray, 
tomography, NMR or^similar, whereby the marks are also photographed, and storing the 
image as a data record; this so-called "digitization" is a prerequisite for the subsequent 
processing of the image. 

- Identifying the marking points; this can be done manually, for example by searching for one 
marking point after the other on the screen by means of the cursor, thereby identifying them. 
This means that the coordinates of the marking points are identified in the image system of 
coordinates. However, it is also possible to use a pattern-recognition procedure for 
identification. 


2. Steps for producing the actual display: these steps are carried out when the person is 
examined or during an intervention. 

- Placing a 3D sensor on the outside of the jaw in question; this is done, for example, by 
screwing the holder for the 3D sensor through the skin in the area of the person's chin if the 
lower jaw is to be displayed. It is, of course, also possible to prepare both the lower and the 
upper jaw for display, by using two sensors. 

- Re-introducing the position-determining device, if meanwhile removed, into the oral cavity 
in the same position as when producing the image, the device being fitted with a 3D sensor. In 
principle, it is possible for the image to be produced immediately before the display. In this 
case, the position-determining device may still be in the mouth. Generally speaking, however, 
the device is re-inserted at this stage: attention must be paid to achieving exactly the same 
position relative to the jaw as when the picture was taken. The 3D sensor must be attached to 
the device, or built into it. What is important is that the position of this sensor, relative to the 
markings, must be unambiguous and accurately known. 

- Determining the positional relationship between the 3D sensor of the device and the 3D 
sensor on the outside of the jaw; this is achieved by determining the spatial position of the two 
sensors at the same or nearly the same time. 

- Removing the position-determining device; this provides free access to the oral cavity. 
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- Producing a superimposition of an optical image of the jaw with the data record in a correct 
positional arrangement. Because of the sensor on the outside of the jaw, the current position of 
the jaw is always known. By performing a series of transformations of coordinates, the data 
record can be positioned such that the structures of the data record always agree with the 
corresponding structures of the optical image, even when a spatial movement of the jaw 
occurs. If both jaws are fitted with sensors, it is possible to toggle between the positional 
display of the lower and upper jaws. However, it is also possible for the data record to be 
divided into a lower-jaw and an upper-jaw part, making it possible to display both the lower 
arid the upper jaw positionally superimposed with the corresponding data record. 

What is important about the present invention is its major simplification of the stage of initial 
adjustment of the arrangement between the data record and the optical display. Once this 
arrangement has been produced, the procedure can run as described in EPA 488 987. Since 
the position of the marking points in the position-determining device is known, it is not 
necessary to scan these points with a 3D stylus or to take other measures to adjust the system. 

jln a second aspect of the present invention, the display is not carried out with the jaw in 
(question; instead, a model of the jaw is produced by means of the known method. The 
j position-determining device then fits into an unambiguously determined position in this 
! model. In this fashion, the model can be displayed with a positionally superimposed data 
j record. This makes it possible to plan operations or to simulate diverse variants of an 
J intervention in a very convenient fashion. 

It is possible to combine these first two aspects with a highly graphic display of the 
relationship between the real jaw and the model. Furthermore, the optical display can also be 
saved by taking still or video pictures. 

The display itself can be dealt with as described in EP-A 488 967. For this purpose, a video 
camera fitted with a position sensor is used to produce an optical display of the object, i.e. the 
jaw or model, and this is then shown on an appropriate monitor. Since both the spatial 
position of the camera and the spatial position of the object are known, it is possible to 
calculate a representation of the data record which corresponds to the same angle of view and 
the same scale. This leads to a coincidence of the corresponding structures of the optical 
display and from the picture of the imaging procedure, making it possible for them to be 
displayed simultaneously or alternately in a correct positional arrangement. 

However, in an advantageous embodiment of the invention, it is possible for superimposition 
of the optical image with the data record to be generated by interposing a display of the data 
record between the eye of the observer and the jaw to be displayed, or alternatively the model 
lof the jaw. Such a display can be generated as a transparent LCD display. In this case, the user 
[observes the real situation-througlithe. disnlay.,on w hich the data record is displayed at the 
[same time./-Th'is means that superimposition occurs in the eye of the u§ e£ Generally, both the 
juser and tlfe-ttispiay can move freely, although marginal conditions must be observed so that 
jthe user can observe the object through the display. In this case, both the user and the display 
'are fitted with a 3D sensor so that the relevant perspective can be calculated. Such a procedure 
lis shown for general objects in the applicant's Austrian patent AT 398 163. This variant has 
,the advantage of not requiring the user to wear any device on the head, other than the very 
jsmOT^lrgHtweight sensOr^dditionally, it is possible to allow additional persons to access the 
display m^simpte-fashion. 

1 v- ; [ ■ ' 

However, it is further possible, in the framework of the invention, for the display to be 
projected as eye glasses or otherwise securely connected to the user's head. The use of 
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semi-transparent mirrors or other processes to reflect an image into the observer's eye is 
another basic option. j 

In a particularly favorable variant of the process acconiing to the invention, the user would 
add three-dimensional structures to the image data rgcorcL and this would be displayed in a 
correct positional arrangement relative to the^ptical imagfe. In this way, it is possible not only 
to enhance structures which are unclear in thermagerbtii also to produce a simulation in a 
very simple fashion. This is advantageous, for example, if a modification is to be carried out 
as part of an orthopedic operation on the jaw. This would make it possible to draw in the 
desired or planned final state. Situations can also be displayed which will result after 
removing or adding segments of bone. The model-based display allows for very accurate 
indications as to the feasibility and related problems of such an intervention. 

Furthermore, not only can the optical display be provided "live": it can also be preserved by 
means of still or video pictures. If the position-determining device also shows optically visible 
[marking points, the procedure according to the invention can be slightly modified. The 
preparatory steps correspond to those of the procedure described above. For simplicity's sake, 
the following description will assume still photos are taken. The explanation is applicable to 
video images with appropriate modifications. Depending on whether the photos are to be 
taken of the jaw itself or a model, such a model may or may not be produced. The important 
thi ng is that at least on e, but preferably two or more picture s are produced from th e same 
perspective, each time one picture when the position-detemiining device and 
jaiioffier when ffie device is not inserted. Since the marking points of the 

device are also visible on the photos, these can be superimposed on a monitor with the X-ray 
picture or similar. This enables determination of the corresponding transformation of 
coordinates. Since the photos without the device have been produced from the same 
{perspective, the data record resulting from the imaging procedure can b e superimposed, in the 
[ correct posi tion, on to these photos as well. This is vital because only on this image are the 
relevant structures visible without obstruction by the device. If some movement of the jaw has 
taken place between the taking of the photos, as is unavoidable in many cases, this does not 
impair the procedure, since the positional sensor applied on the outside records this 
movement, thus enabling a suitable correction. Apart from displaying the photos, this variant 
of the procedure naturally also enables "live" display, as described above. The procedure is 
(simplified, since a dedicated 3D sensor is required for the position-determining device. 

Moreover the present invention involves a position-determining device, which can be used for 
one of the above processes, whereby the device can be inserted in a person's oral cavity and is 
designed so that the person's upper and lower jaws can be maintained in a position which can 
be unambiguously reproduced. This device is characterized by the fact that it has marking 
points which can be identified by means of an imaging procedure, and that it furthermore has 
a position sensor which enables accurate determination of the spatial position of the device. 
As already described above, the position sensor can be removable as long as it is guaranteed 
that, with a built-in sensor, the spatial arrangement between sensor and the marking points is 
unambiguous and reproducible. 

In a preferred embodiment, the device : consists of a fixed basic unit, which shows the marking 
points and the position sensor^ and this basic unit has retaining devices consisting of a flexible 
material which can be hardened to fit the shape of teeth or the jaw. The device is first adapted 
to the jaw in< the form of an impression, and after hardening can be placed reproducibly in the 
same position. 
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In a variant of the device, it has marking points which can be identified both with an imaging 
procedure and are also visible optically. 

The following material explains the invention by means of the embodiments shown in the 
diagrams. The figures provide the following schematic views: 

Fig. 1 shpws a person with a position-determining device inserted in the oral cavity; Fig. 2 
shows a first system for implementing the procedure according to the invention; Fig. 3 shows 
a second system for implementing the procedure according to the invention, while Fig. 4 
shows a variant of the embodiment of marking points. 

Fig. 1 indicates the head of an individual with lower jaw 1 and upper jaw 2. Between these 
two is a position-determining device, which is designed as a so-called splint, which can be 
inserted in an unambiguously reproducible position. This device has a number of marking 
points 4, which can be seen clearly, e.g. on an X-ray display. A 3D sensor 5 is securely 
connected to the device 3. An additional 3D sensor 6 is screwed onto the outside of the lower 
jaw 1 . 

The system in Fig. 2 consists of a camera 10, to which a 3D sensor is securely attached. The 
camera is connected via a computer 12 with a monitor 13, on which the lower jaw 1 can be 
displayed. A picture from the imaging procedure is also stored iii computer 12. Furthermore, 
the computer is connected to a magnetic field emitter 14, in a fixed installation. As a result it 
is possible to record the specific spatial position, including the relative position of sensors 6 
and 1 1 . The computer calculates a display of the data record from the imaging procedure in 
real time, and displays this on the screen. 

In the embodiment shown in Fig. 3, the computer 12 is connected to a transparent LCD 
display 23 which has a 3D sensor 22. The observer 20 also wears a 3D sensor 21. In addition 
to sensor 6, which as in the previous embodiment is connected to the lower jaw 1, here too, 
the design also includes a sensor 26, which is worn on the forehead and hence is securely 
fixed to the upper jaw 2. The computer calculates a display of the imaging procedure, which 
combines the relevant position of jaw 1, 2, display 23 and observer 20. Similarly, it is possible 
to observe a model 30 of the jaw, which is fitted with sensors 31, 32. 

Fig. 4 is a schematic representation of an alternative to the design of the marking points which 
are on or in the position-determining device. Structures are arranged in three planes 40, 41, 42 
which are at right angles to each other. These structures generate a contrast on the X-ray 
picture. When the device 3 is inserted in the jaw 1, 2, two of these planes 40, 42 are then 
basically parallel to the plane of symmetry of the head. Each structure consists of a rectangle 
with a diagonal. 50 designates an imaginary plane of embedding of a CT image which is at 
right angles to planes 40 and 42. In the corresponding display of this CT plane 50, the upper 
side 60 of the rectangle appears as point 60a, the lower side 61 as point 61a, and the diagonal 
62 as point 62a lying between these points 60a and 61a. The precise position of plane 50 can 
be determined from the ratio of the distances m and n of point 62a to points 60a and 61a. In 
this way it is possible to correct the CT information for table advance, as is necessary if the 
patient has moved during the scanning process. 

Planes 40, 41 ■ 42 with the structures described above can be integrated in the 
positibti-determining device, and also connected with it by a rigid link such that they are 
outside the jaws 1,2. 
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1 . Procedure for displaying the jaw of a person, consisting of the following preparatory steps: 

- Introducing into the person's oral cavity a position-determining device (3) which has 
marking points (4); 

- Taking at least one image of the person's jaw (1,2) with an imaging procedure, such as 
X-ray, tomography, NMR or similar, whereby the marking points (4) are also photographed, 
and storing the image as a data record; 

- Identifying the marking points (4); 

the following steps being performed for display purposes: 

- Applying a 3D sensor (6, 26) on the outside of the jaw in question (1, 2) 

- Re-introducing the position-determining device (3), if meanwhile removed, into the oral 
cavity in the same position as when taking the image, the device (3) being fitted this time with 
a 3D sensor (5) 

- Determining the positional relationship between the 3D sensor (5) of the device (3) and the 
3D sensor (6, 26) on the outside of the jaw (1, 2) 

- Removing the position-determining device (3) 

- Generating a superimposition of an optical image of the jaw (1, 2) with the data record in a 
correct positional arrangement. 


2. Procedure for display of a model of a person's jaw, consisting of the following steps: 

- Introducing into the person's oral cavity a position-determining device (3) which has 
marking points (4); 

- Taking at least one image of the person's jaw (1,2) with an imaging procedure, such as 
X-ray, tomography, NMR or similar, whereby the marking points (4) are also photographed, 
and storing the image as a data record; 

- Identifying the marking points (4); 

- Producing an impression of the jaw (1,2) and generating a model (30) of the jaw (1, 2); 
the following steps being performed for display purposes: 

- Placing an additional 3D sensor (31, 32) on the outside of the model of the jaw (1, 2) 

- Introducing the position-determining device (3) into the model (30) of the jaw (1, 2) in the 
same position as when taking the image, the device (3) being fitted with a 3D sensor (5) 

- Determining the positional relationship between the 3D sensor (5) of the device (3) and the 
3D sensor (30; 31) on the outside of the model (30) of the jaw (1, 2) 
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- Removing the position-determining device (3) 

- Generating a superimposition of an optical image of the model (30) with the data record in a 
correct positional arrangement. 


3. Procedure for display of a model of a person's jaw and a model thereof, consisting of the 
following preparatory steps: 

- Introducing into the person's oral cavity a position-determining device (3) which has 
marking points (4); 

- Taking at least one image ofthe person's jaw (1, 2) with an imaging procedure, such as 
X-ray, tomography, NMR or similar, whereby the marking points (4) are also photographed, 
and storing the image as a data record; 

- Identifying the marking points (4); 

- Producing an impression of the jaw (1, 2) and generating a model (30) of the jaw (1,2); 
the following steps being performed for display purposes: 

- Placing an additional 3D sensor (6, 26) on the outside of the model of the jaw in question (1, 

2); 

- Re-introducing the position-determining device (3), if removed in the meanwhile, into the 
oral cavity in the same position as when taking the image, the device (3) being fitted this time 
with a 3D. sensor (5); 

- Determining the positional relationship between the 3D sensor (5) of the device (3) and the 
3D sensor (6, 26) on the outside of the jaw (1,2); 

- Removing the position-determining device (3); 

- Placing an additional 3D sensor (6, 20) on the outside of the model of the jaw (1, 2); 

- Introducing the position-determining device (3) into the model (30) of the jaw (1 , 2) in the 
same position as when taking the image, the device (3) being fitted with a 3D sensor (5); 

- Determining the positional relationship between the 3D sensor (5) of the device (3) and the 
3D sensor (30, 31) on the outside of the model (30) of the jaw (1, 2); 

- Removing the position-determining device (3); 

- Generating a superimposition of an optical image of the jaw (1 , 2) with the data record in a 
correct positional arrangement, or alternatively generating an imposition of an optical image 
of the model (30) of the jaw (1 , 2) with the data record in a correct positional arrangement. 


4. Procedure according to any of Claims 1 through 3, wherein the generation of the 
superimposition of an optical image with the data record is performed on a monitor (13), 
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wherein the optical image is taken by a video camera (1), which is securely connected with a 
3D sensor (1 1) to determine the spatial position. 


5. Procedure according to any of Claims 1 through 3, wherein the generation of a 
superimppsition of the optical image with the data record takes place through the interposition 
of a display of the data record between the eye of the observer (20) and the jaw to be displayed 
(1, 2) or the model of the jaw (1, 2). 


6. Procedure according to Claim 5, wherein the display takes the form of a transparent LCD 
display (23). 


7. Procedure according to Claim 5 or 6, wherein the display takes the form of eye glasses, a 
screen arranged between observer and jaw (1, 2) or model, preferentially with a 3D sensor, or 
the display is performed by reflecting the data record into the eye of the observer (20). 


8. Procedure according to any of Claims 1 through 7, wherein the user inserts 
three-dimensional structures in the image data record and these are displayed in a correct 
positional arrangement to the optical image. 


9. Procedure for the display of a person's jaw and/or a model thereof, consisting of the 
following preparatory steps: 

- Introducing into the person's oral cavity a position-determining device (3) which has 
optically visible marking points (4); 

- Taking at least one image of the person's jaw (1, 2) with an imaging procedure, such as 
X-ray, tomography, NMR or similar, whereby the marking points (4) are also photographed, 
and storing the image as a data record; 

- As appropriate, producing an impression of the jaw (1,2) and generating a model (30) of the 
jaw (1,2); 

the following steps being performed for display purposes: 

- Placing an additional 3D sensor (6, 26) on the outside of the model of the jaw in question (1, 
2) or the model (30) of the jaw; 

- Re-introducing the position-determining device (3), if removed in the meanwhile, into the 
oral cavity or the model (30) in the same position as when taking the image in the imaging 
procedure; 

- Taking at least one photographic or video picture of the jaw (1, 2) or the model (30); 

- Removing the position-determining device (3); 
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- Taking at least one more photographic or video picture of the jaw (1, 2) or the model (30) 
from the same position; 

- Storing the photographic or video pictures as a data record; 

- Producing a correspondence between the marking points on the picture of the imaging 
procedure. and the optical display; 

- Generating a superimposition of an optical image of the jaw (1, 2) with the data record in a 
correct positional arrangement, or alternatively generating a superimposition of an optical 
image of the jaw (1 ,2) or the model (30) with the data record in a correct positional 
arrangement. 


1 0. Position-determining device which can be used for a procedure according to any of Claims 
1 through 8, wherein the device (3) can be inserted in a person ! s oral cavity and is designed so 
that it can be maintained in an unambiguously reproducible position by the person ! s upper jaw 
(2) and lower jaw (1), wherein the device (3) has marking points (4) which can be identified 
with an imaging procedure, and that it furthermore has a position sensor (5), which makes 
possible precise determination of the spatial position of the device (3). 


1 1 . Device according to Claim 10, characterized by its consisting of a fixed basic unit which 
has the marking points (4) and the position sensor, this basic unit having retainers consisting 
of a flexible material, capable of hardening, which fits the shape of teeth or the jaw (1,2). 


12. Position-determining device which can be used for a procedure according to Claim 9, 
wherein the device (3) can be inserted in a person f s oral cavity and is designed so that it can be 
held between the person's upper jaw (2) and lower jaw (1) in an unambiguously reproducible 
position, characterized by the fact that the device (3) has marking points (4) which can be 
identified with an imaging procedure and are also optically visible. 
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